- 综合排序
- 最热优先
- 最新优先
- 来自专栏RTSP/RTMP直播相关
VR头显Unity下如何实现毫秒级延迟的RTMP或RTSP播放？
好多VR场景下，如果存在延迟，用户在移动头部时可能会感觉到画面反应不及时，导致影响视频的流畅度。在VR电影或VR直播中，延迟则可能导致画面和声音的实时同步出现问题，使用户产生晕眩感。 今天，我们主要介绍的是VR头显下，如何低延迟的实现RTMP或RTSP的播放。技术实现说了这么多，如何在VR头显端，尽可能的降低直播播放延迟呢？ 以大牛直播SDK为例，我们在做Unity下RTMP或RTSP直播播放的时候，大多场景对延迟和资源占有要求非常高，鉴于好多时候，特别是头显终端，性能可能不尽人意，需要播放的视频分辨率码率又高，如何高效率的实现低延迟的 RTMP或RTSP播放，是Unity下比较棘手的问题，特别是毫秒级延迟。 环境下的RTMP、RTSP直播播放，如果需要延迟和稳定性都靠谱，建议数据接收、解包解码回调yuv/rgb数据在原始native模块处理，然后把解码后的数据，高效率的投递到unity测，实现unity环境下的低延迟
1K30编辑于 2023-09-12 - 来自专栏RTSP/RTMP直播相关
Android平台实现VR头显Unity下音视频数据RTMP推送
实现 大多数头显设备，基于Android平台，本文以Unity环境下的窗体采集、麦克风、和Unity内部音频采集为例，介绍下具体实现思路，其中，音频采集可分为：采集麦克风、采集Unity音频、麦克风和Unity 音频混音、2路Unity音频混音。 采集到的音视频原始数据，分别投递到Android原生封装的模块，进行编码、打包，通过RTMP传输到服务端，实现毫秒级延迟的RTMP直播方案。 【推送URL】NT_PB_U3D_SetPushUrl，设置推送的RTMP URL； 40.【开始RTMP推流】NT_PB_U3D_StartPublisher，开始RTMP推流； 41. 【停止RTMP推流】NT_PB_U3D_StopPublisher，停止RTMP推流； 42.【开始录像】NT_PB_U3D_StartRecorder，开始录像； 43.
1.1K20编辑于 2022-04-28 - 来自专栏RTSP/RTMP直播相关
Unity环境下RTMP推流+RTMP播放低延迟解决方案
在本文之前，我们发布了Unity环境下的RTMP推流（Windows平台+Android平台）和RTMP|RTSP拉流（Windows平台+Android平台+iOS平台）低延迟的解决方案，今天做个整体汇总 Unity环境下RTMP推流 Unity环境下，不管是camera还是窗体数据也好，主要是高效率的拿到原始数据，采集端可用的数据格式是RGB的，拿到之后，通过高效率的数据传递，发给封装后的原生SDK，完成数据编码和 RTMP推送。 Unity环境下RTMP|RTSP播放器 Unity环境下RTMP或RTSP直播播放我们前几年就有发布，并已应用在好多传统行业领域，比如教育或工业仿真或一些低延迟的控制场景。 相关博客： Windows平台Unity3d下如何同时播放多路RTSP或RTMP流 https://cloud.tencent.com/developer/article/1800633 如何在Unity3d
4.2K10发布于 2021-06-15 - 来自专栏RTSP/RTMP直播相关
Unity平台如何实现RTSP转RTMP推送？
技术背景Unity平台下，RTSP、RTMP播放和RTMP推送，甚至包括轻量级RTSP服务这块都不再赘述，今天探讨的一位开发者提到的问题，如果在Unity下，实现RTSP播放的同时，随时转RTMP推送出去 RTSP转RTMP，在原生环境下老早已经有了，这里，其实就是把原生的挪到Unity即可，相关流程如下：图片技术实现本文以Windows平台为例，在RTSP播放模块的基础上，加个RTSP转RTMP推送模块 开始转推RTMP、停止转推：public bool StartPush(int sel, String url){ if (videoctrl[sel].is_pushing_) return audio_info.parameter_info_, audio_info.parameter_info_size_); }}总结实际上，Unity 环境下的RTSP转RTMP推送，相对RTMP、RTSP播放或推流，对接更容易，因为基本不涉及到页面交互，感兴趣的开发者可以尝试看。
63200编辑于 2023-07-14 - 来自专栏RTSP/RTMP直播相关
Unity环境下实现Camera高帧率RTMP推送
Unity下RTMP直播背景方面不再赘述，今天主要讨论的是，Unity环境下，如何实现Camera高帧率RTMP推送，这里提到的高帧率，不再局限于常规环境下的30帧，以VR头显为例，更高的帧率（比如50 图片图片之前，我们老早实现了Unity环境下的RTMP低延迟推送，原生环境下，比如windows下，可轻松实现50帧+的编码和RTMP推送（需要播放端也有高帧率播放的能力）。 好多开发者对这块比较感兴趣，今天分享几个点，权当抛砖引玉：数据源：拿到期望的高帧率数据是基础，以Android或Windows的Unity环境为例，如果你想推50帧，起码camera能每秒读到超过50帧的数据 内部音频、麦克风+unity内部音频混音或Unity下2路内部音频混音，麦克风的话，可以原生实现，然后直接调用即可，Unity内部音频可以通过AudioClip读取数据，编码的话，考虑到通用性，一般建议 环境下高帧率RTMP推送一点抛砖引玉的介绍，实际开发过程中，可能还需要考虑多实例、异常网络环境处理等各种情况，如果原生开发这块，有很好的积累，这块都不难。
92120编辑于 2022-08-21 - 来自专栏RTSP/RTMP直播相关
Android平台实现Unity3D下RTMP推送
像Unity3D下的RTMP或RTSP播放器一样，好多开发者苦于在Unity环境下，如何高效率低延迟的把数据采集并编码实时推送到流媒体服务器，实现Unity场景下的低延迟推拉流方案。 如果只需要拿到Unity的窗体或摄像机数据推出去，可在Unity下获取到需要推送的原始数据，然后封装原生的RTMP推流接口，调用原生SDK实现数据推送，这种做法的好处是，可以自定义需要采集的数据内容，只要按照原生 Android平台Unity3D的RTSP或RTMP播放器，可以参考 https://cloud.tencent.com/developer/article/1800633 本文以Android平台为例 ，介绍下Unity环境下的Android平台RTMP推流，数据采集在Unity完成，数据编码推送，调用大牛直播SDK（官方）Android平台RTMP直播推送SDK原生库对外二次封装的接口，高效率的实现 下图系Android平台Unity环境下采集屏幕，编码推送到RTMP服务器，然后Windows平台播放器拉取RTMP流播放，为了方便看到延迟效果，特地在Android端的Unity窗口显示了当前时间，可以看到
1.2K30发布于 2021-06-08 - 来自专栏呆呆敲代码的小Y 公众号
Unity-VR | AR相关（更新中）
Unity-VR | AR相关 Unity-VR插件 一：Unity AR好用的插件 虚拟现实（VR）是未来的一大发展方向，Unity作为一款主流的游戏引擎，早已在VR的路上加码。 下面介绍一些用Unity开发VR游戏/应用的插件，可以帮助开发者更好的开发各种VR程序，构建通往未来之路。 1：VR Panorama 360 PRO Renderer VR Panorama 360 PRO Renderer可以帮助开发者在Unity内部渲染4K360°全景视频。 ? 4：VR Easy VR Easy是用Unity开发VR应用的一个多方面解决方案，开发者只需接单的拖拽就可以搭建出一个VR应用的雏形。该插件支持各大主流VR平台。 ? 下面推荐用Unity开发VR程序的一些常用插件。 1：Vuforia Core Samples Vuforia相对简单，适合初级AR入门开发者。
1.2K30发布于 2021-08-12 - 来自专栏python3
Unity3D+VR的实现
针对CardBoard一类的眼镜用Unity3D开发VR内容。 1、创建VRCamera： 使用Dive插件，从DiveUnityDemo提取摄像机和有关的脚本并export出来。
78310发布于 2020-01-14 - 来自专栏RTSP/RTMP直播相关
Unity下如何实现RTMP或RTSP播放端录像？
好多开发者问我们，Unity环境下，除了RTSP或RTMP的播放，如果有录像诉求，怎么实现？实际上录像相对播放来说，更简单一些，因为不涉及到绘制，只要拉流下来数据，直接写mp4文件就好了。 本文以大牛直播SDK的Windows平台为例，大概介绍下如何实现Unity环境下的录制，Linux、Android、iOS平台实现也类似，都是原生接口，然后对接下就好：图片开始录像因为涉及到可能同时录制多路的场景 NTSmartPlayerSDK.NT_SP_Close(videoctrl[sel].player_handle_); videoctrl[sel].player_handle_ = IntPtr.Zero; }}以上是Unity 平台RTMP或RTSP播放端录像相关接口设计和调用实例，感兴趣的开发者可以参考。
50400编辑于 2023-09-11 - 来自专栏RTSP/RTMP直播相关
Unity实现camera数据注入RMP推送或轻量级RTSP服务模块
技术背景随着技术的不断进步和应用的不断深化，Unity3D VR应用的前景非常广阔，它广泛应用于教育、医疗、军事、工业设计、虚拟数字人等多个领域。 教育领域：Unity3D VR技术可以用来创建虚拟现实教室，让学生能够身临其境地体验课程内容，提高学习效果和兴趣；医疗领域：Unity3D VR技术可以用来创建虚拟手术室，让医生能够在真实手术之前进行模拟操作 ，提高手术技能和安全性；军事领域：Unity3D VR技术可以用来创建虚拟战场环境，进行军事训练和战术演练，提高士兵的战斗能力和应变能力；工业设计领域：Unity3D VR技术可以用来创建虚拟现实工作环境 技术实现从技术的角度，分析如何在unity环境下，采集到camera数据，然后编码打包推RTMP或启动轻量级RTSP服务。 我们老早实现了Unity环境下的RTMP低延迟推送，原生环境下，比如windows下，可轻松实现50帧+的编码和RTMP推送（需要播放端也有高帧率播放的能力）。
42200编辑于 2023-07-26 - 来自专栏RTSP/RTMP直播相关
RTSP|RTMP播放器 in Unity：开源不够用？从工程视角重新定义播放器选型
技术背景随着 Unity 引擎在多个垂直行业的深入应用，它早已不再只是游戏开发者的工具，更逐渐成为工业仿真、虚拟现实（VR/AR）、AI 模型训练、远程设备操控、智慧安防等领域的核心可视化平台。 因此，在 Unity 中集成 RTSP/RTMP 的播放器，已经成为多数可视化方案的基础能力要求。 一、 Unity下播放 RTSP / RTMP 的典型技术挑战尽管 Unity 拥有强大的跨平台图形能力，但它并不原生支持任何流媒体解码与播放功能。 主流开源方案技术对比对比维度FFmpeg 插件GStreamer for UnityVLC Unity 插件协议支持✅ RTSP / RTMP / 本地文件✅ 多协议，可自定义管线✅ RTSP / RTMP 以下是基于 RTSP/RTMP 协议和 Unity 渲染框架的典型落地场景，以及各自的技术价值分析。
51800编辑于 2025-07-27 - 来自专栏RTSP/RTMP直播相关
Unity3D下如何采集camera场景数据并推送RTMP服务？
Unity3D使用场景Unity3D是非常流行的游戏开发引擎，可以创建各种类型的3D和2D游戏或其他互动应用程序。 虚拟现实：Unity3D也常用于虚拟现实（VR）开发，它提供了对VR设备的支持，如Oculus Rift和HTC Vive。 推送服务本文以大牛直播SDK开发的Unity3D下Android平台的RTMP推送camera场景的demo为例，结合Unity和原生模块交互，大概介绍下核心实现逻辑。 is_pushing_rtmp_ && ! _ = false; }技术总结Unity3D下采集camera场景并推送RTMP具有重要的意义，可以为实时监控、在线直播、视频教程制作、增强现实和虚拟现实应用以及数据记录和分析等领域提供有力的支持
88140编辑于 2023-09-01 - 来自专栏RTSP/RTMP直播相关
Android平台如何实现Unity3D下RTMP推送
像Unity3D下的RTMP或RTSP播放器一样，好多开发者苦于在Unity环境下，如何高效率低延迟的把数据采集并编码实时推送到流媒体服务器，实现Unity场景下的低延迟推拉流方案。 如果只需要拿到Unity的窗体或摄像机数据推出去，可在Unity下获取到需要推送的原始数据，然后封装原生的RTMP推流接口，调用原生SDK实现数据推送，这种做法的好处是，可以自定义需要采集的数据内容，只要按照原生 本文以Android平台为例，介绍下Unity环境下的Android平台RTMP推流，数据采集在Unity完成，数据编码推送，调用大牛直播SDKAndroid平台RTMP直播推送SDK原生库对外二次封装的接口 ，高效率的实现RTMP推送。 下图系Android平台Unity环境下采集屏幕，编码推送到RTMP服务器，然后Windows平台播放器拉取RTMP流播放，为了方便看到延迟效果，特地在Android端的Unity窗口显示了当前时间，可以看到
1.5K20发布于 2021-06-08 - 来自专栏RTSP/RTMP直播相关
Unity低延迟RTSP|RTMP播放器开发指南
概述与优势1.1 SDK功能特性1.1.1 支持协议与格式 支持RTMP、RTSP协议，兼容H.265、H.264视频格式及AAC、PCMA等音频格式，满足多样化播放需求。 Unity播放器架构设计2.1 核心模块划分2.1.1 PlayerInstance模块 管理单个播放实例的生命周期，负责视频播放、录制及视频帧回调。 /RGB数据通过回调接口传递给Unity，避免在Unity层处理复杂的协议栈和解码逻辑。 的Texture2D，避免每帧重建（通过is_need_init_texture_标志控制） 结语通过大牛直播SDK的深度集成与参数调优，开发者能够在Unity中构建毫秒级延迟的RTSP/RTMP播放器 ，适用于VR、安防、直播等高实时性场景。
96410编辑于 2025-02-20 - 来自专栏RTSP/RTMP直播相关
Unity下如何实现RTMP或RTSP流播放和录制
技术背景在探讨Unity平台RTMP或RTSP直播流数据播放和录制之前，我们先简单回顾下RTSP或RTMP直播流数据在Unity平台的播放流程：通过Native RTSP或RTSP直播播放SDK回调RGB /YUV420/NV12等其中的一种未压缩的图像格式；Unity下创建相应的RGB/YUV420等Shader； Unity从各个平台获取图像数据来填充纹理即可。 Unity3D环境下，我们之前已覆盖以下模块：Windows平台RTMP直播推送模块（采集Unity窗体、摄像头或屏幕）; Windows平台RTMP|RTSP直播播放模块； Linux平台RTMP 直播推送模块（采集Unity窗体、Unity声音）; Linux平台RTMP|RTSP直播播放模块； Android平台RTMP直播推送模块（采集Unity窗体、麦克风或Unity声音）； Android 平台RTMP|RTSP直播播放模块； iOS平台RTMP|RTSP直播播放模块。
2.7K60编辑于 2022-12-24 - 来自专栏腾讯移动品质中心TMQ的专栏
漫步VR——Unity语音聊天室开发
_5），将压缩包中对应的unity版本的文件夹(如5.4,5.3)中的文件解压到Unity安装目录的/Editor/Data/VR/Unity/下边； 2、打开Unity，Edit->ProjectSettings 完成这些步骤以后可以在Unity中直将工程运行在VR上。 完成上面四个步骤的准备后便可以在Unity中尽情绘制你的VR世界了。 /OVRPlugin_for_Unity_5），将压缩包中对应的unity版本的文件夹(如5.4,5.3)中的文件解压到Unity安装目录的/Editor/Data/VR/Unity/下边。 但是这种UI界面对VR基本不适用，我们的眼睛无法聚焦在如此近的物体上，而Unity VR中根本就不支持Screen Space-Overlay。
5.1K90发布于 2018-02-06 - 来自专栏RTSP/RTMP直播相关
Android平台下VR头显如何低延迟播放4K以上超高分辨率RTSP|RTMP流
技术背景VR头显需要更高的分辨率以提供更清晰的视觉体验、满足沉浸感的要求、适应透镜放大效应以及适应更广泛的可视角度，超高分辨率的优势如下：提供更清晰的视觉体验：VR头显的分辨率直接决定了用户所看到的图像的清晰度 因此，为了保持放大后的图像依然清晰，VR头显需要更高的分辨率来弥补透镜放大带来的像素密度降低问题。 为了保持这些区域依然清晰可辨，VR头显需要更高的分辨率来确保整个画面的清晰度和稳定性。 技术实现实际上，大牛直播SDK在2018年就发布了Unity的RTSP|RTMP的播放模块，平台陆续覆盖了Windows、Android、iOS和Linux，Unity下播放RTSP|RTMP流，原理很简单 ，底层原生模块，把RTSP|RTMP流拉过来，做解析解码回调YUV或RGB数据到上层，Unity环境下，做绘制即可。
33710编辑于 2024-06-18 - 来自专栏RTSP/RTMP直播相关
Windows平台Unity下播放RTSP或RTMP如何开启硬解码？
我们在做Windows平台Unity播放RTMP或RTSP的时候，遇到这样的问题，比如展会、安防监控等场景下，需要同时播放多路RTMP或RTSP流，这样对设备性能，提出来更高的要求。 虽然我们软解码，已经做的资源占有非常低了，但考虑到多路播放的情况，我们也设计了硬解码的接口，下面大概讲下，如何在Unity下开启硬解码： 图片 检测系统是否支持硬解码 /* * 检查是否支持 extern UInt32 NT_SP_SetH265HardwareDecoder(IntPtr handle, Int32 is_hardware_decoder, Int32 reserve); Unity
77810编辑于 2023-08-25 - 来自专栏RTSP/RTMP直播相关
Unity下如何实现低延迟的全景RTMP|RTSP流渲染
技术背景Unity3D可以用于创建各种类型的的应用程序，包括虚拟现实、培训模拟器等。 在Unity3D平台上实现全景实时RTMP或RTSP流渲染，可以通过以下方式：获取全景视频数据源：首先，需要拉取RTMP或RTSP流数据，解码后，把RGB或YUV数据，回调到unity，从而获取到全景视频流数据 ；Unity创建个Sphere，创建个材质球(Material)，并把材质球挂在到Sphere； 实现实时渲染：使用Unity3D的渲染管道，您可以将纹理映射到球体或立方体的表面上，并使用着色器来处理纹理的坐标 技术实现图片本文以大牛直播SDK的RTMP推送端作为数据采集，获取全景窗体数据后，编码打包推送到RTMP服务，或启动个轻量级RTSP服务，对外提供个RTSP的拉流URL。 然后，播放端，拉取RTSP或RTMP的URL，把YUV或RGB数据回调上来，然后，再在Unity窗体绘制出来。
64500编辑于 2023-07-27 - 来自专栏RTSP/RTMP直播相关
Unity3D平台实现全景实时RTMP|RTSP流渲染
好多开发者的使用场景，需要在Windows特别是Android平台实现Unity3D的全景实时视频渲染，本文以Windows平台为例，简单介绍下具体实现： 如果是RTSP或RTMP流数据，实际上难点，主要在于拉取 RTSP或RTMP流，解析解码，然后把解码后的YUV数据，回调到Unity层，Unity创建个Sphere，创建个材质球(Material)，并把材质球挂在到Sphere即可。 本文以Windows推送端采集全景视频，编码推送到RTMP服务器，播放端拉流回调数据并在Unity渲染为例（左侧是Unity播放端，滑动鼠标，可以实现全景内容切换）： unity全景.jpg 废话不多说 ，大概流程如下： 本文以调用我们写的RTSP、RTMP直播播放模块为例，首先是初始化模块，然后设置拉流的参数信息： public void Play(int sel) { if (videoctrl 下实现RTMP或RTSP全景视频播放的大概流程，感兴趣的开发者可自行尝试。
1.5K50编辑于 2022-04-05
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号